查看原文
其他

利用FFmpeg仿微信小视频录制与压缩处理

马北剑西 鸿洋 2019-04-05

每日推荐


【Android 蓝牙 pbap 获取通话记录以及通话日期时间】,蓝牙相关的一篇文章,有兴趣的可以学习下~

http://www.jianshu.com/p/cf2b7d8651b5


本文作者


本文由马北剑西投稿。

马北剑西的博客地址:

http://blog.csdn.net/mabeijianxi/


之前还推送给过一篇:仿微信视频拍摄UI, 基于ffmpeg的视频录制编辑,可以一起学习~


1
概述


本库暂时是在秒拍开源库上做的二次开发,旨在开发简单好用高效的视频录制库。本篇文档只涉及Java层次逻辑,正在业余修炼c语言与JNI相关的东西,如果有幸写第二篇文章,那时将对其做更深入的剖析,如FFmpeg编译、JNI相关代码编写。


效果图:



功能描述:


利用FFmpeg录制定制化的视频,并可对其定制化的压缩处理。如设置视频尺寸、设置码率、码率模式、帧率、视频质量等级、压缩速度等等,当然这些只是暂时的,后期会继续维护。


项目地址:

https://github.com/mabeijianxi/small-video-record.



2

使用方法


1:添加依赖

compile 'com.mabeijianxi:small-video-record:1.2.0'


2:在manifests里面添加


<activity android:name="mabeijianxi.camera.MediaRecorderActivity"/>  


3:在Application里面初始化小视频录制:



4:跳转录制界面:



3

原理讲解


基本过程就是调用系统camera与AudioRecord得到视频和音频的byte回调,然后出入配置好参数FFmpeg,结束后得到目标视频。


(1)配置Camera参数:


首先我们录制的视频是竖着的,所以需要旋转90°(默认是横屏录制):camera.setDisplayOrientation(90);


 然后设置显示控件:camera.setPreviewDisplay(mSurfaceHolder); 


帧率设置:这个参数是可传入的,但是每个摄像头所支持的大小是不一样的,所以你传入maxFrameRate我会再校验一遍,如果当前摄像头支持此帧率那么就使用,如果不支持那么就选择个最接近且小于它的,如果你值很小有可能还是找不到,这时就选择最小的一个,具体算法如下:



摄像头输出尺寸设置:


通过系统API mParameters.getSupportedPreviewSizes()可以得到当前摄像头所支持的尺寸,注意这里返回的Size里面其height对应的屏幕短边,width对应的是屏幕长边,也就是说我们也要校验传入的smallVideoWidth是否支持,当然smallVideoHeight不需要校验,


因为是小视频,我们到时候说不定还会剪切掉一部分,校验完成即可得到传入的smallVideoWidth所对应的且摄像头所支持的对应高度,把这个宽高设置上即可。常见的smallVideoWidth 有480、720、1080等等。


具体如下:



设置采样率:


常用格式有两种:NV21 / YV12,mParameters.setPreviewFormat(ImageFormat.NV21)


(2)接收设备并传入FFmpeg音(音频具体可参考AudioRecorder类)视频数据:


这里首先需要知道几个FFmpeg命令:


  • -vf 可以添加滤镜,特别强大,可以旋转缩放剪切等等,我们需要用到旋转和剪切(我一直考虑需不需要用缩放的方式,因为这样可以在预览界面设置高分辨率看着清晰一些)。

  • transpose,旋转,对应的值有0、1、2、3,0:逆时针旋转90°然后垂直翻转1:顺时针旋转90°,2:逆时针旋转90°,3:顺时针旋转90°然后水平翻转。

  • 剪切,关键字是crop,其有四个参数,分别是宽度、高度、其实剪切位置的X值与Y值,如ffmpeg -i a.mp4 -vf crop=480:360:0:0...;

  • -vcodec 指定视频编解码器;

  • -acodec 指定音频编解码器;

  • vbr 动态码率;

  • cbr 静态码率;

  • -crf 视频质量等级0~51,越大质量越差,建议18~28即可,与cbr模式不兼容;

  • -preset 转码速度,快慢的优劣应该都懂的,可根据自己业务场景设置,具体有:ultrafast、superfast、veryfast、faster、fast、medium、slow、slower、veryslow、placebo;

  • -i 指定输入;

  • -x264opts 配置其编解码参数;

  • maxrate 最大码率;

  • bitrate 固定码率;

  • -f 输出格式;

  • -s 设置帧大小。格式为 ‘wxh’;

  • -ss 指定开始时间;

  • -vframes 指定多少帧;


接着皆可在录制前配置我们的录制参数:



我们这里设置了旋转滤镜与剪切滤镜,由于我们录制竖屏视频所以旋转90°,然后剪切为我们制定的视频尺寸。当然里面还有三个get函数,分别是视频质量等级转码速度码率模式


视频质量等级命令为-crf [size]:



转码速度命令为-preset [what]:



码率模式: 码率模式分为vbr与cbr,我在里面加了三个类AutoVBRMode、VBRMode、CBRMode,三者都可传入转码速度。如果不想管那么多那么只需传入无参的AutoVBRMode对象即可,只有AutoVBRMode模式下可以传入视频质量等级值,这个值将最大程度上控制视频质量。VBRMode模式下可以指定最大码率与额定码率。、CBRMode模式下出入一个固定码率即可。



配置好后即可开始录制,在camera的数据回调里面把数据转入底层。



(3)多段视频合并


录制过程中我们可以暂停录制,这个可能生成n段短视频,这个我们就需要合并视频了,利用FFmpeg命令也可以轻松实现:




这里视频和音频的编解码器使用原始数据的即可,命令为-vcodec copy -acodec copy这样速度回比较快,-absf表示为匹配的流设置比特流过滤器,当然还有-vbsf,最新的指定方式是-bsf:v


(4)进一步转码压缩


如果没有设置 doH264Compress 参数那么将不执行以下逻辑



上面我们指定了视频编解码器为libx264,音频编解码器为libfdkaac,然后跟你个性化冲入的doH264Compress 参数进行压缩,结束后我们就得到了压缩好的视频了。


(5)截取视频中的一帧作为封面



总结


本库的优点是简单便捷,可控性强,后期将继续维护。


缺点是FFmpeg优点老,后期会考虑自己编译一份,那时利用FFmpeg玩转Android视频录制与压缩(二)也就出来了,优点开始期待了,有兴趣的同学


注意:


  1. 编译环境请满足:targetSdkVersion<=22

  2. 出现 java.lang.UnsatisfiedLinkError错误可以尝试在gradle.properties中添加:android.useDeprecatedNdk=true,然后在主module的build.gradle中配置ndk {abiFilters "armeabi", "armeabi-v7a"}


欢迎到我github上指教

https://github.com/mabeijianxi/small-video-record

ZZS

无论你是有 Java 基础希望学 Android 开发的程序员,还是想进一步提升能力的 Android 开发者,都可以在这个Udacity & Google 官方参与制作 的课程项目中找到适合自己的成长路径!



*独家硅谷技术课程

*行业领导者设计的实战项目

*一对一学习辅导

*名企颁发学习认证

*毕业直达滴滴面试


如果你有想学习的文章直接留言,我会整理征稿。如果你有好的文章想和大家分享欢迎投稿,直接向我投递文章链接即可。


欢迎长按下图->识别图中二维码或者扫一扫关注我的公众号:


    您可能也对以下帖子感兴趣

    文章有问题?点此查看未经处理的缓存